MAS-PromptBench: When Does Prompt Optimization Improve Multi-Agent LLM Systems?
MAS-PromptBench:多智体系统中提示优化何时有效?
🧭 多智体提示优化基准
Johns Hopkins University
首次系统基准测试多智体场景下的提示优化,揭示其有效条件与敏感性
📌 工作参考价值(4 点)
- 当业务用多智体做商品描述生成、客服协作等时,应先手动设计角色提示再简单微调,仅需少量迭代即可达到大部分收益
- 不同通信协议(如流水线 vs 辩论)对提示优化的敏感度差异大:在高安全要求场景优先采用融合多智体输出再优化的模式
- 团队规模增大时提示优化的边际收益下降,推荐保持 3-5 个角色的轻量架构,避免优化成本指数增长
- 系统提示优化可替代模型微调,快速适应业务变化(如活动主题切换),适合需要频繁调整策略的电商推荐 Agent